—— 青亭网
其他
ARKit 3领衔，苹果AR三剑客来袭，支持实时人体遮挡和姿态检测
hi188｜ 撰文
在今天凌晨举行的WWDC2019开发者大会上，苹果正式推出iOS 13操作系统，随之而来的除了备受关注的ARKit 3，还有全新的RealityKit和Reality Composer开发工具。与此同时现场还请来了MOJANG团队首次曝光实机运行版《我的世界：地球》AR游戏，通过游戏完美展示了最新的实时人体遮挡和人体姿态检测功能。
苹果AR三剑客祭出，谁与争锋
本来还以为本次WWDC没有AR相关的信息，没想到放到了最后的环节。没有意外苹果推出了升级版的ARKit 3，与此同时还推出RealityKit和Reality Composer，这是两个全新的AR开发工具，由此组成苹果AR开发平台的三剑客。
RealityKit、Reality Composer、ARKit 3
RealityKit是一个有关于AR场景融合的功能，我们知道创建一个逼真的3D环境需要复杂的建模，往往要花费大量时间在引擎上面，而RealityKit则可以将3D控件真实的展示在AR场景中，号称具备照片级渲染效果。
RealityKit
该工具拥有以下几个功能：1，场景高度逼真，号称提供照片级渲染；2，支持环境和相机特效；3，支持动画、音频特效等；4，与本地ARKit高度集成；5，支持Swift API。
RealityKit
那么如何创建3D场景呢？这就需要Reality Composer来帮忙了，该工具的特点是可以让你通过拖拽、点击等简单的操作即可构建可互动的AR场景，同时内置了大量3D内容数据库，同时还可与Xcode和iOS应用配合使用，这样就能实现AR场景快速预览并进行微调，大幅提升效率。
Reality Composer
简单来讲，RealityKit和Reality Composer就是让你更快速、高效的建立一套逼真的AR交互场景，看来苹果自从去年的USDZ之后继续在简化三维场景方面做出努力，相信随着三维场景变得更容易获取、更容易制作之后，开发者对于AR内容的兴趣就会逐渐提升。
ARKit 3
有关ARKit 3的更新功能有很多更新，通过上图来看功能包括：HDR环境纹理、多人的人脸识别、AR环境下ApplePay支付、增加视觉连贯性、自动检测大小、图像载入更快，多模型AR快速预览等等。
由于本次时间有限，只介绍了两个功能，一个是实时人体遮挡功能，另外就是人体姿态识别。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=n0879m8ae94
实时人体遮挡算作是移动AR重磅功能，没有之一。因为这直接决定着AR的沉浸感，AR环境想要达到逼真的效果遮挡是必要条件之一，ARKit 3中的实时人体遮挡功能绝对是移动AR的又一个杀手锏功能，领先对手没商量。
从演示视频来看，人在AR虚拟环境中走动和在真实环境中走动基本没有区别，前后虚拟物体的遮挡效果堪称完美。
同时ARKit 3还加入了人体姿态识别功能，在AR场景中虚拟形象可以精准的模仿你的动作，包括手、脚、身体动作等等。
当然，人体姿态识别在AR场景中已经有其他平台跟进，这方面虽然谈不上领先，但从现场演示视频来看效果还是非常理想的。
《我的世界：地球》AR首次实机演示
看了这些AR功能，怎么进行一个展示呢。这次苹果邀请到MOJANG工作室，通过其最新的AR游戏《我的世界：地球》进行了功能演示。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=r0879iyq2bz
现场视频中充分展示了这几个新功能，首先游戏内整个场景布局很熟悉，包括底部工具栏，空中烟火等等。
其中我们注意到几个细节：1，在游戏内可以看到对方手机位置，显示的是对方所持工具，上方还有名字，锤子获取石块的过程也可以轻松的被捕捉到；2，当对方的人在你的手机镜头展示超过半身时，就可以展现对方的姿态，例如挥手等就能实时体现在虚拟形象上。
接下来的这一刻就神奇了，刚刚的演示是基于桌面端的AR场景，下面将进入一个沉浸式AR场景中。
即便是在沉浸式场景中，你的真人形象直接融入到AR场景里面，除了脚部有些抠像几乎可以忽略的小夏此外，整个人物抠像可以说是效果相当理想，身临其境般的感受。
实时人物遮挡功能在这时展现的淋漓尽致，例如鲜花可以挡住人物形象，而人物也会遮挡住后边的建筑。
当然，这其中的人物抠像也是由于背景较暗，且下方拥有一块地毯，其作用应该是用于Marker定位。另外，演示的画面基于iPad Pro性能足够强大，但画面依然存在略微抖动情况。
实际上，此前微软也表示《我的世界：地球》采用和原版游戏同样的基岩引擎，地图数据基于Open Street Maps，定位追踪还会基于Azure空间定位。据《我的世界：地球》工作人员描述，该游戏将会在今年夏天正式登陆iOS。
Memoji新增捏脸和贴纸功能
在最新的iOS 13操作系统中，苹果对Memoji进行了升级，其中最大的功能变化就是加入捏脸系统。我们也发现，它的整个玩法有点类似于此前火热的Zepeto应用。当然，苹果的优势就是系统集成度更高。
https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=u0879lndqnq
从视频中我们可以看出，整个一个捏脸系统定制化还是蛮高的，包括肤色、发色、口红、眼影、眼镜、耳环、帽子、甚至还有Airpods的模型。
与此同时，苹果还为Memoji进行了定制化贴纸功能， 这些贴纸同样可以兼容第三方应用，现场演示了在微信中使用Memoji贴纸功能。
总结
对于开发者们而言，相信Swift UI应该是最为欢呼的功能，全新框架，大量简化代码，实时预览，继续在省时省力的方向上前进。嗯，苹果还是那个苹果。
总结来看，本次WWDC上几大操作系统并没有太多重磅功能，AR也是苹果加注投入的领域之一，因此ARKit 3和RealityKit、Reality Composer也将继续巩固苹果在移动AR方面的霸主地位，虽然ARKit 2已经领先对手，但AR还需要更多功能加入进来。此外，毫无疑问的是苹果也在为AR云做准备，整套系统将来可轻松扩展至AR眼镜平台。当然，本次并没有传闻中AR眼镜硬件，我们预计到最早也要到明年，拭目以待吧。
（END）
推荐阅读
—— 青亭网